”flume kafka 优化 消息队列 负载均衡 高可用“ 的搜索结果

     大数据工程师面试题 1.选择题 1.1.下面哪个程序负责 HDFS 数据存储。 a)NameNode b)Jobtracker c)Datanode d)secondaryNameNode e)tasktracker 答案 C datanode 1.2.HDfS 中的 block 默认保存几份?...

大数据面试题

标签:   flink  kafka  spark

     Hadoop hdfs中小文件的处理 (1)采用har归档方式,将小文件归档 (2)采用Combine TextInputFormat 请列出正常工作的hadoop集群中hadoop都需要启动哪些进程,他们的作用分别是什么? namenode =>...

     Q1、 kafka基本原理,kafka如何保证接收消息的顺序性 Kafka基本原理:Kafka是apache开源一个分布式的、可分区的、可复制的消息系统。将消息的发布称producer,将消息的订阅表述为 consumer,将中间的存储阵列称作 ...

Flume

标签:   大数据  flume

     文章目录数据流模型复杂流可靠性可恢复性sourceAvro SourceThrift SourceExec SourceSpooling Directory SourceEvent反序列化器LINEAVROBlobDeserializerKafka SourceNetCat TCP SourceNetCat UDP SourceSyslog ...

hadoop面试题

标签:   hadoop

     1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂) 2.hadoop 的 namenode 宕机,怎么解决 先分析宕机后的损失,宕机后直接导致client无法访问,内存中的...

     目录 一、Flume简介 二、Flume架构 2.1 Flume基本组件 2.2 Flume常见数据流模型 三、Source,Channel,Sink 详解 ...本文仅用于学习记录总结所用,配置方面有大量参考官方文档,以方便查阅,不喜勿喷。...

     选择题 下面哪个程序负责 HDFS 数据存储。 a)NameNode b)Jobtracker c)Datanode d)secondaryNameNode e)tasktracker 答案 C datanode HDfS 中的 block 默认保存几份?...a)3 份 b)2 份 c)1 份 d)不确定 ...

     1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂) 2.hadoop 的 namenode 宕机,怎么解决 先分析宕机后的损失,宕机后直接导致client无法访问,内存中的...

     1. 选择题1.1. 下面哪个程序负责 HDFS 数据存储。a)NameNode b)Jobtracker c)Datanode d)secondaryNameNode e)tasktracker答案 C datanode1.2. HDfS 中的 block 默认保存几份?a)3 份 b)2 份 c)1 份 d)不确定答案...

1